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基于 鸽子 视 顶 盖 神 经 元 响应 对 不 同 颜色 背景 字符 图 像 的 重建 研究 
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摘 要 : 解析 脑 神经 元 动作 电位 《Spike) 表征 的 视觉 信息 是 重要 的 科学 问题 ， 从 Spike 信号 中 重建 视觉 刺激 是 解决 该 
问题 的 重要 途径 。 提 供 了 一 种 从 神经 元 Spike 信号 重建 视觉 刺激 的 方法 ， 通 过 提取 4 种 颜色 背景 下 5 种 字符 图 像 刺激 


89 484LIR X (OT) 神经 元 的 Spike 发 放 率 特征 ， 构 建 线性 送 滤波 
颜色 背景 的 字符 图 像 重 建 并 分 析 了 背景 颜色 对 重建 结果 的 影响 


红 、 绿 、 


器 和 随机 森林 重建 模型 ， 优 化 模型 参数 ， 从 而 实现 不 同 
。 结 果 表明 , 最 优 参数 条 件 下 , 线性 逆 滤波 器 模型 对 白 、 
蓝 背 景 下 字符 图 像 的 平均 重建 正确 率 达 到 0.9225+0.0268、0.9027+0.0204、0.9358+0.0235、0.8170+0.0313， 随 
机 森林 模型 对 应 的 图 像 平 均 重 建 正确 率 为 0.9499+0.0255、0.9228+0.0303、0.9472+0.0239、0.7913 土 0.0255。 方 差分 析 发 
现 ， 和 白色 、 红 色 和 绿色 背景 图 像 重建 结果 无 显著 性 差异 ， 但 这 3 种 颜色 背景 图 像 重 建 结果 与 蓝 色 背景 重建 结果 有 显著 
性 差异 。 
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Research on character image reconstruction under different color backgrounds based on 
neuron spike signals in pigeon optic tectum 


Wang Zhizhong?, Yan Wenming^, Wang Songwei? 
(a. School of Electrical Engineering; b. Industrial Technology Research Institute, Zhengzhou University, Zhengzhou 450001, 
China) 


Abstract: It is an important scientific problem to analyze visual information represented by action potentials (Spike) of brain 
neurons. Reconstruction of visual stimuli by Spike signals is an important approach to solve this problem. This paper provides 
a method to reconstruct visual stimuli from Spike signals of neurons. This experiment adopted five kinds of character images 
under four color backgrounds to stimulate the pigeons, and then extracted the firing rate characteristics of Spike signals from 
the optic tectum (OT) neurons. And this experiment constructed a linear inverse filter and a random forest reconstruction model 
and optimized the model parameters to reconstruct characters images under different color backgrounds. And this paper analyzed 
the effect of background color on reconstruction results. The results show that under optimal parameter, the average 


reconstruction accuracy of Character images in white, red, green and blue backgrounds using the linear inverse filter model is 


0.922540.0268, 0.9027--0.0204, 0.9358::0.0235, and the average reconstruction accuracy of character images using the random 
forest model is 0.94994-0.0255, 0.9228:-0.0303, 0.9472::0.0239, and 0.79132:0.0255. The analysis of variance shows that there 


is no significant difference in the image reconstruction results of white, red, and green backgrounds, but the image reconstruction 
results of the three colors backgrounds are significantly different from the reconstruction results of the blue background image. 


Key words: the optic tectum; Spike; firing rate; reconstruction; color backgrounds; significant difference 
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引言 处 理 的 载体 ， 利 用 视觉 相关 核 团 神经 元 的 Spike 信号 重建 视觉 

~ 刺激 对 探究 神经 元 如 何 通过 Spike 信号 表征 视觉 信息 具有 重要 

脑 的 信息 表征 是 神经 科学 、 智 能 科学 关心 的 重要 科学 问题 意义 。 本 文通 过 提取 神经 元 Spike 信号 中 的 响应 特征 ， 并 构建 
高 频 的 神经 元 动作 电位 信号 (Spike,>250 Hz) 是 脑 信息 传输 、 重建 模型 ， 从 而 实现 不 同 颜色 背景 下 的 图 像 刺 激 重建 ， 这 不 仅 
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能 为 揭示 视觉 感知 神经 元 信息 处 理 回 路 的 功能 提出 新 视角 品 ， 红色 和 绿色 背景 下 的 字符 图 像 重 建 结果 均 与 蓝 色 背景 下 的 图 像 
同时 也 对 更 高 效 图 像 编码 方式 的 探究 以 及 仿生 图 像 分 类 算法 的 ”重建 结果 有 显著 性 差异 , 并 且 蓝 色 背 景 削弱 了 图 像 重 建 的 质量 


研究 提供 了 新 思路 中 。 i HR 
在 生物 视觉 系统 的 研究 中 有 很 多 关于 基础 视觉 刺激 解码 的 

研究 ， 其 对 本 文 图 像 刺 激 重建 有 启发 性 作用 。2007 年 , Quiroga 1.1 动物 

等 人 DB 采集 人 内 侧 颗 叶 区 的 Spike 响应 信号 , 利用 fisher 线性 判 实验 动物 采用 专业 养殖 场 〈 共 创 鸽 业 合作 有 限 公司 ) 的 健 
别 算法 对 视觉 刺激 进行 了 区 分 。2007 F, Sang 等 人 的 利用 线性 ”康信 使 ， 体 重 为 300—400 g， 购 买 后 在 动物 房 饲养 至 少 2 周 。 
算法 实现 了 on-o 任 刺激 光照 强度 的 解码 ， 并 且 解 码 的 光照 强度 ”每 天 给 予 动物 光照 黑暗 各 12h, 动物 房 温 度 保 持 为 (23+2) °C, 
与 真实 光照 强度 的 相关 系数 为 0.8。2009 Æ, Busse ANKHA ”按时 喂养 ,饲养 和 照料 标准 均 遵循 郑州 大 学 实验 动物 管理 规定 。 
不 同 对 比 度 的 两 个 朝向 光栅 作为 刺激 模式 ， 并 用 多 通道 电极 阵 1.2 手术 

列 采 集 猫 V1 区 神经 元 集群 动作 电位 信号 ， 实 现 了 对 比 度 的 解 铝 子 的 麻醉 方式 为 腹腔 注射 成 巴 比 妥 钠 (1.5%, 3.0 mL/kg). 
码 。2014 年 ，Aubiels 等 人 采用 Spike 响应 信号 ， 利 用 最 大 似 然 ”在 麻醉 0.5 h 之 后 将 铝 子 固定 于 立体 定位 仪 〈 型 号 ST-5ND-B， 
估计 器 精确 地 解码 出 刺激 的 持续 时 间 。2014 4E, Kuriki EAT ”成 都 仪器 厂 )。 在 鸽子 左 侧 脑 区 确定 视 顶 盖 位 置 03, 使 用 颅 钻 等 
研究 人 类 的 视觉 皮层 对 正弦 调制 环形 视觉 刺激 响应 ， 发 现 人 类 ”器具 进行 开 颅 手术 。 利 用 微型 操控 仪 (Mc1000e，Siskiyou，San 
视觉 皮层 中 由 亮度 和 颜色 定义 的 两 种 神经 元 可 以 相互 作用 。 Diego，CA，USA) 将 电极 阵列 〈Clunbury Scientific, Bloomfield 
2015 Æ, Karimi 等 人 外 利用 下 里 叶 (ITO 皮层 神经 元 的 Spike ^ Hills, MI, USA) 植 入 脑 区 ， 植 入 深度 为 500—1200 num。 所 用 
响应 信号 实现 了 简单 灰 度 刺激 的 解码 。2017 年 ， 师 黎 等 人 中 通 有 极为 32 通道 , 按照 4x8 的 方式 进行 排列 , 行 间隔 为 350 um, 
过 对 锅子 研究 也 说 明 OT 区 神经 元 对 亮度 与 颜色 的 编码 不 是 独 。 ”每 行 电极 间隔 为 350 nm， 电极 阻抗 为 20~50 kQ9。 然 后 将 电极 
立 的 。2018 年 ，Lazar 等 人 (10 对 V1 区 复杂 细胞 集群 的 稀 疏 功 ”阵列 中 的 地 线 与 骨 螺 钉 相 连用 于 接地 ， 并 使 用 cerebus KER 
能 表征 进行 研究 ， 并 利用 该 功能 建 模 实现 了 对 灰 度 视觉 刺激 的 ”” 统 (美国 Blackrock 公司 ) 以 2 kHz 采样 率 进行 电 生理 信号 的 采 
解码 。 上 述 文献 研究 结果 表明 : 利用 Spike 信号 能 够 实现 简单 。 ”和 集 。 在 实验 结束 时 用 成 巴 比 受 钠 (1.5%，5.0mL/kg〉 对 饮 子 进 


视觉 刺激 的 解码 , 并且 不 同 的 视觉 刺激 属性 之 间 存 在 相互 影响 。 ” 行 处 死 。 

但 神经 元 Spike 信和 号 能 否 表征 字符 图 像 等 复杂 刺激 信息 目前 1.3 视觉 刺激 

不 清楚 ， 同 时 不 同 背 景 颜 色 图 像 刺激 的 重建 效果 是 否 有 显著 性 文中 视觉 刺激 均 采 用 matlab 2014a 软件 编辑 生成 ， 刺 激 在 
差异 也 不 得 而 知 。 CRT 显示 屏 上 进行 显示 ， 屏 幕 分 辨 率 为 1280x960, 屏幕 刷新 率 


鸟 类 具有 非常 出 色 的 视觉 系统 和 颜色 分 辨 能 力 ， 已 成 为 研 ” 为 60Hz， 屏 幕 中 心 与 鸟 子 右 眼 的 距离 为 40cm。 文 中 实验 流程 
究 视觉 系统 结构 和 功能 特性 的 理想 材料 50。 离 顶 盖 通路 是 鸟 类 ”如 图 1(a) 所 示 。 实 验 主要 包含 两 种 刺激 模式 。 一 种 是 棋盘 格 刺 
视觉 信息 处 理 的 关键 通路 ， 视 顶 盖 是 离 顶 盖 通 路 中 一 个 及 其 重 。 激 模 式 ， 其 目的 是 为 了 测 出 神经 元 感受 野 的 位 置 ， 如 图 1(b). 
要 的 神经 核 团 ， 其 接收 来 自视 网 膜 神 经 节 细胞 的 颜色 信息 ， 棋盘 格 刺激 设计 为 : 在 灰色 背景 下 设计 15x15 的 棋盘 格 ， 在 棋 
进行 信息 的 编码 和 整合 ， 然 后 将 信息 映射 到 丘脑 圆 核 (halamic 盘 格 内 以 20 Hz 的 刷新 率 伪 随 机 闪现 黑色 方块 , 重复 20 次 。 另 
nucleus rotundus)02-19， 因 此 实验 选择 视觉 系统 发 达 的 鸽子 作为 一 种 刺激 模式 为 字符 图 像 刺 激 ， 即 一 幅 图 片 按照 从 下 到 上 、 从 
实验 动物 。 右 至 左 的 顺序 进行 扫 屏 移动 ， 一 幅 图 片 扫 屏 移动 169 次 使 图 片 

本 文 研究 了 和 白色、 红色 、 绿 色 与 蓝 色 背景 下 黑色 字符 图 像 ” 所 有 像素 块 均 经 过 感受 野 范围 (一 次 循环 169 帧 )。 对 于 每 一 帧 
刺激 的 重建 ,并 进一步 探 完了 背景 颜色 对 图 像 重建 效果 的 影响 。 图 像 刺激 ， 本 文 重建 位 于 感受 野 范围 内 的 4 个 像素 点 〈4 个 像 
文中 以 4 种 颜色 背景 下 的 5 种 不 同类 型 的 字符 图 像 (三 角形 、 素 点 相 邻 形成 像素 方块 )。 这 种 扫 屏 移动 的 优点 是 能 克服 感受 野 
圆 、 十 字 、A、N) 作为 视觉 刺激 ， 采 集 了 鸽子 OT 区 神经 元 自 空间 的 不 均匀 分 布 。 实 验 中 对 于 每 一 种 图 像 刺 激 均 循 环 播放 5 
FERI Spike 响应 信号 ， 提 取 了 Spike 信号 的 发 放 率 特征 ， 并 分 ”次 ， 从 中 选用 4 次 循环 刺激 和 响应 数据 用 于 训练 模型 ， 剩 下 的 
别 构建 了 线性 逆 滤 波 器 图 像 重 建 模型 与 随机 森林 图 像 重 建 模型 。 1 次 用 于 图 像 重建 。 图 像 刺 激 以 30Hz 频率 进行 内 现 , 即 每 一 帧 
为 获取 较 好 的 重建 模型 , 需要 对 模型 的 通道 个 数 (num)、 时 间 窗 ”图像 的 呈现 时 间 为 33.33ms， 以 白色 和 绿色 背景 的 三 角形 字符 

(bin)、 刺 激 持 续 时 间 (7)、 刺 激 后 开始 时 间 (4delay) 等 参数 进行 图 像 刺 激 为 例 ， 刺 激 播放 过 程 如 图 1(c) 所 示 ， 刺 激 图 像 中 的 红 
优化 。 作 为 对 重建 质量 的 评 佑 ， 文 中 用 重建 正确 率 指标 对 重建 ” 色 圆 代表 感受 野 位 置 。 
质量 进行 评价 。 通 过 实验 数据 分 析 可 知 : 两 种 重建 模型 均 能 实 
现 不 同 背 景 颜色 下 的 图 像 重 建 ， 这 说 明 Spike 发 放 率 特征 能 够 


Yit 


2 重建 方法 


表征 图 像 刺激 信息 。 进 一 步 通过 方差 分 析 (ANOVA) 发 现 ， 并非 文中 所 用 实验 信号 为 Spike 信号 ， 即 大 于 250Hz 的 高 频 信 
各 背景 颜色 均 对 重建 结果 产生 较 大 的 影响 ， 其 中 和 白色、 红色 和 号 ， 它 是 由 外 界 视觉 刺激 所 引发 的 神经 元 放电 活动 ， 并 且 携 带 
绿色 背景 下 的 字符 图 像 重 建 结果 之 间 没 有 显著 性 差异 ,但 白色 、 了 能 够 表征 视觉 刺激 的 关键 信息 。 利 用 神经 元 Spike 信号 实现 
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刺激 播放 
—31 与 分 析 A 
| 信号 记录 xs | 
21.41 21.45 21.49 21.53 21.57 21.61 
time / s 
(a) 实验 流程 示意 图 


100 ms 


0 ms 


(b) 感受 野 刺 激 模式 


300 ms 


(c) 图 像 刺激 模式 


图 1 


实验 方法 


Fig.l Experimental methods 


2.1 Spike 信号 的 特征 提取 


将 每 一 帧 刺激 后 神经 元 的 响应 时 间 (T- delay ) 均 分 为 N 
个 时 间 窗 (bin)， 每 个 bin 的 时 间 长 度 为 (7 -delay)/N ， 计 算 每 


个 神经 元 的 每 个 时 间 窗 内 的 Spike 发 放 个 数 ， 构 成 实际 
应 下 的 响应 矩阵 n 为 
1 ni n ny hi n 
R- 1 mi fs ny f Fu 
1 «i Tua Tun Ty a TaN 
其 中 ， 忆 表示 在 第 ;个 字符 图 像 刺激 时 ， 


第 j 个 时 间 窗 bin 的 发 放 个 数 ，jy 


必 表 刺激 总 帧 数 。 


2.2 ”多 元 线性 逆 滤 波 器 重建 模型 的 构建 


与 上 述 响应 矩阵 所 对 应 的 刺激 入 


E 阵 为 9 : 


刺激 响 


(1) 


v 通道 Spike 信号 的 


; ChinaXi VS 合作 期 刊 
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字符 图 像 重 建 ， 重 建 过 程 主要 包含 三 个 步骤 : 特征 提取 、 重 建 "P 
模型 构建 、 重 建 质量 评估 。 s= S12 S22. S32 S42 2) 
£- i E im - A^ Sm SM Sm Sam 


其 中 : 5,, KIRE LOC 
表 刺 激 的 总 帧 数 。 
文中 图 像 刺激 循环 5 次 播放 (845 帧 )， 文 中 选择 前 4 次 进 
行 线性 逆 滤 波 器 模型 的 训练 ， 第 5 次 循环 进行 重建 ， 所 以 从 尺 
矩阵 中 按 顺 序 选 取 M, 行 特征 构成 训练 特征 矩阵 R ， 其 中 
M, =0.8M ， 并 从 刺激 矩阵 s 中 对 应 选取 M,x4 维 矩阵 s 作为 
训练 目标 变量 。 在 获得 R ，5, 的 基础 上 ， 求 解 权 值 向 量 ps fü 
得 U =R F> RPU 3I SEE E EORB PE. ficit fien 
真实 刺激 与 训练 集中 重建 刺激 间 的 方差 (S, -UCS 一 UV) 达到 
最 小 原则 , SE HISEUEDE SOBRE, p^ F-(RIR) (R/S): KP F 

的 具体 形式 为 : 
F'-la fo fi 


IA, $ a 个 像素 点 处 的 实际 值 ，jy 代 


fh 3) 


其 中 ， 记 表示 解码 滤波 器 中 神经 元 v 在 jar 时 刻 的 值 ，a 代表 


着 恒定 补偿 量 。 由 于 对 每 帧 刺激 的 4 个 像素 点 进行 重 


d, UI 


训练 得 到 的 模型 对 测试 


f; a 是 一 个 列 向 量 (4x1)。 根 据 上 述 


数据 进行 图 像 重 建 ， 重 建 算 阵 为 

U-R,F-R,(R/R)'R/S, (4) 
其 中 : ,为 测试 特征 矩阵 , 与 R 对 应 的 测试 集 原 始 图 像 刺激 为 
S, 如 下 : 
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u 表示 第 ;个 刺激 时 ,第 d 个 像素 点 处 的 图 像 刺 激 重建 值 。 


2.3 ”随机 森林 重建 模型 的 构建 

Breiman 于 2001 年 提出 随机 森林 (RF) 算 法 ，RF 是 一 种 统 
计 学 习 理 论 , 它 是 利用 bootstrap 重 抽样 方法 从 原始 样本 中 进行 
样本 抽取 ， 对 每 个 bootstrap 样本 进行 决策 树 建 模 ， 然 后 组 合 多 


棵 决策 树 的 预测 ， 通 过 投票 得 出 最 终 预 测 结果 09。 随 机 森林 
备 有 效 处 理 高 维度 特征 数据 集 的 能 力 ， 并 能 获取 较 高 分 类 正确 


率 ， 这 是 文中 选取 随机 森林 RF) 算法 进行 图 像 刺激 重建 的 主 
要 原因 。 文 中 同样 利用 前 4 次 循环 的 神经 元 响应 信号 特征 〔 响 
MJERE RO ED RF 模型 的 输入 特征 ， 对 应 字符 图 像 的 实际 矩 
FE s, 作为 RF 算法 的 训练 标签 来 训练 重建 模型 。 在 获得 RF 
建 模型 之 后 , 利用 第 5 次 循环 的 响应 矩阵 尺 作为 重建 数据 实现 
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法 模型 中 决策 树 的 数目 ， 
随机 森林 算法 中 决策 树 的 数目 和 特征 的 最 大 数量 
向 ， 文 中 刺激 图 像 重建 中 的 决策 树 数目 为 500， 特 生 
大 数量 为 总 特征 数 的 算术 平方 根 ， 此 时 能 对 字符 医 
地 实现 重建 。 
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下 像 刺 激 的 重建 。 

在 matlab 2014a 运行 环境 下 使 
mtry) 函 数 进 行 RF 模型 的 构建 。 其 中 ，X 代表 训练 样本 中 的 输 
B. Y 代表 训练 样本 中 的 训练 目标 变量 ，ntree 代表 RF 算 
mtry 代表 单个 决策 树 特 行 


ur 


2.4 重建 结果 的 评估 方法 


为 了 评价 重建 刺激 矩阵 U, 与 实际 更 
度 ， 文 中 以 重建 正确 率 作为 图 像 重 建 的 评估 标准 ， 
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化 不 同 参数 下 重建 效果 的 影响 。 其 评估 公式 为 


其 中 ，M, 为 测试 数据 集 的 刺激 帧 数 ，c， 为 重建 
E 阵 相同 像素 点 个 数 与 图 像 总 像素 点 个 数 反 
比值 。c,， 作为 评价 指标 其 取 值 范围 为 cc[0 1], F 
HERE. c, = 0 代表 未 能 重建 ，c,, =1 代表 对 原 
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随 着 T 的 增加 而 升 高 并 最 终 达 到 饱和 值 ， 选 取 饱 和 值 对 应 的 T 


用 classRF. train(X, Y, ntree, 


TOR EE s, 之 间 的 相似 
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if 


激 后 开始 时 间 delay=0ms, 在 此 参数 下 , 利用 单 通 
重建 ， 


结果 与 分 析 


本 文 的 实验 数 


重建 参数 的 优化 选择 
于 利用 Spike 信号 对 字符 重建 的 效果 与 通道 个 数 (num)、 


进行 优化 。 


correct rate 


ERAF 5 只 鸽子 OT 区 (500—1200 um) 
经 元 集群 的 Spike 信号 ， 数 据 分 析 均 利用 MATLAB 2014a 软 
件 完 成 。 在 进行 图 像 刺激 之 前 ， 首 先 利用 棋盘 格 刺激 确定 字 
元 感受 野 位 置 ， 使 得 字符 图 像 刺激 均 能 在 感受 野 内 播放 。 


为 最 优 值 , 对 应 的 最 大 标准 差 为 0.0366、0.0303、0.0262、0.0387。 
步 确定 最 优 T 后 ， 改 变 delay， 重 建 结果 如 图 2(d) 所 示 。 
轩 中 可 以 看 出 ， 各 颜色 背景 下 图 像 重 建 正确 率 随 着 delay 的 
而 降低 ， 本 文选 取 各 颜色 背景 下 正确 率 变化 曲线 上 的 最 大 
值 所 对 应 的 delay. 作为 最 优 值 ， 对 应 的 最 大 标准 差 为 0.0523、 
0.0324、0.0324、0.0293。 上 述 各 颜色 背景 下 的 最 优 参数 如 表 1 
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(a) 不 同 通道 数 个 数 参 数 优 化 过 程 
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(b) 不 同时 间 窗 口 优化 过 和 


(za)、 刺 激 持续 时 间 ( 刀 、 刺 激 后 不 同 开始 时 间 (delay) 
有 着 密切 的 关系 ， 因 此 需要 分 别 对 4 种 背景 颜色 下 的 字符 重建 
模型 选 出 最 优 模型 参数 。 下 面 以 线性 逆 滤 波 器 算法 为 例 对 


模型 参 


Et 将 基础 参数 选择 为 :，7=0.25s， 时 间 窗 口 


correct rate 
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对 应 的 最 大 标准 差 为 0.0241、0.0429、0.0324、0.0230。 在 选 定 
通道 数目 
确 率 变 
减 , 记录 各 颜色 背景 下 重建 正确 率 变化 曲线 最 大 值 所 对 应 的 bin 
值 作为 最 优 值 , 白 、 红 、 绿 、 蓝 背景 对 应 的 最 大 标准 差 为 0.0272、 

0.0366、0.0241、0.0722。 接 下 来 ， 在 上 述 最 优 参 数 的 基础 上 改 
变 了 的 大 小 ， 各 背景 下 的 图 像 重建 正确 率 如 图 2(c) 所 示 ， 


正确 率 降 序 依次 到 力 
重建 正确 率 随 通道 数目 变化 如 图 2(a) 所 示 ， 白 、 
景 下 重建 正确 率 变化 曲线 均 随 通道 数目 的 夫 
岗 饱 和 趋势 ， 选 取 各 变化 


颜色 


道 对 图 
按照 重建 正确 率 降序 进行 通道 排序 。 接 下 来 按照 重建 
1 通道 进行 图 像 重 建 ，4 种 颜色 
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的 二 而 上 改变 bin 的 大 小 ， 各 颜 GES 


线 饱和 点 作为 最 优 通 道 妆 


化 趋势 如 图 2(b) 所 示 ， 其 变化 趋势 随 着 bin 


T/ms 


(c) 不 同 持续 时 间 优 化 过 程 
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录用 定稿 王 治 忠 ， 等 : 


delay/ms 


(d) 刺激 后 不 同 开始 时 间 优化 过 程 
图 2 重建 参数 优化 过 程 
Fig.2 Optimization process of reconstruction parameter 
对 于 随机 森林 重建 模型 也 需要 进行 参数 的 优化 ， 其 优化 过 
程 如 上 述 一 致 ， 其 各 颜色 背景 下 的 最 优 参数 如 表 2 所 示 。 
表 1 线性 道 滤波 器 重建 模型 在 不 同 背 景 下 的 最 优 重建 参数 


Table 1 Optimal reconstruction parameters of linear inverse filter 
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reconstruction model in different backgrounds 


参数 white red green blue 
num 8 9 8 9 
bin/ms 2 4 3 3 
T/s 0.18 0.20 0.24 0.28 
delay/ms 0 10 0 10 


表 2 随机 森林 重建 模型 在 不 同 背 景 下 的 最 优 重建 参数 


Table 2 Optimal reconstruction parameters of random forest 


reconstruction model in different backgrounds 


参数 white red green blue 
num 7 9 9 9 
bin/ms 6 6 3 2 

T/s 0.18 0.20 0.20 0.22 
delay/ms 10 5 10 60 


3.2 重建 结果 展示 与 分 析 

实验 字符 图 形 刺激 包括 : 三 角形 、 圆 、 十 字 、A、N， 每 种 
图 像 刺激 分 别 设计 4 种 不 同 背景 颜色 刺激 ， 然 后 分 别 采 用 最 优 
的 线性 逆 滤 波 器 与 随机 森林 重建 模型 实现 对 字符 图 像 刺 激 的 重 
建 ， 并 通过 重建 正确 率 指标 对 字符 图 像 重 建 质量 进行 评估 。 最 
后 以 方差 分 析 的 方式 分 析 各 背景 颜色 下 的 重建 结果 是 否 在 在 差 
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文中 构建 了 线性 逆 滤 波 器 与 随机 森林 重建 模型 对 字符 图 像 
进行 重建 。 真 实 字 符 图 像 刺激 如 图 3(a) 所 示 ， 线 性 逆 滤 波 器 重 
建 模型 的 字符 图 像 重建 结果 如 图 3(b) 所 示 ， 该 模型 对 5 种 字符 
在 各 背景 颜色 下 的 重建 正确 率 统计 结果 如 图 4(a)， 随 机 森林 重 
建 模 型 字符 图 像 重建 结果 如 图 3(c) 所 示 ， 其 重建 正确 率 统计 结 
果 如 图 4(b)。 其 中 白色 、 红 色 、 绿 色 、 蓝 色 背 景 下 5 种 刺激 图 
像 利用 线性 道 滤 波 器 模型 的 平均 重建 正确 率 能 够 达到 
0.9225--0.0268., 0.9027--0.0204 , 0.93582-0.0235.. 0.81702:0.0313 . 

对 于 随机 森林 重建 模型 ， 对 应 5 种 不 同 颜色 背景 下 的 图 像 平 均 
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行 了 显著 性 分 析 ， 并 用 多 


量 因素 ，4 种 背景 颜色 表示 该 因素 的 4 
重建 正确 率 作为 因 变 量 进行 方差 分 析 。 
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显著 性 差异 。 接 下 来 通 
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prb174.70x10?., pgoi78.4 


9x108, FX] 


此 可 以 看 


出 : AE, 


绿色 背景 下 图 像 重 建 结 


色 背 景 下 图 像 重 建 结果 之 间 没 有 


显 


性 3 


AEF 


差异 ， 并 且 蓝 色 背 景 削 


© 
pus 

3, 
Ri 
XR 


弱 


果 均 与 蓝 


ER 
58 
i] 
zx 
E 


Ir 
b 
WR] 
EE 
m 
m 
IA 
Lm 
? 


- 


as 


E 


vir 


i 
IL 
= 
Ri 
R 


: i | 
o 


FERRIS 


色 和 绿 


H 


14r : 
E wnite 
12 EH red 
IS green 
| blue 
[^] 
S o8. : t] 
$ | i 
- 0.6 | 
04 .- 
0.2 
° 角形 E A 
刺激 图 像 类 型 
(c) 随机 森林 模型 重建 的 字符 图 像 刺激 (b) 随机 森林 模型 下 各 字符 图 像 的 重建 正确 率 
图 3 真实 图 像 与 两 种 模型 下 的 重建 结果 展示 J4 不 同 颜色 背景 下 两 种 模型 对 图 像 重建 统计 结果 
Fig.3 Realimage and reconstruction results under two models Fig.4 Image reconstruction statistical results of two models under 
利用 RF 模型 的 重建 正确 率 进 行 方差 分 析 。 分析 得 : 4 种 颜 different color backgrounds 
色 背 景 字符 图 像 重 建 结果 显 著 性 水 平 Fs(3,36)=45.33， mp 
< Y 
p:-2.60x10-2, TO QM KU ue 


重建 结果 同样 具有 显著 性 差异 。 接 下 来 进行 多 重 比较 分 析 ， 白 由 神经 元 的 响应 重建 相应 的 视觉 刺激 是 理解 视觉 编码 的 一 
色 背 景 与 红色 背景 、 白 色 背 景 与 绿色 背景 、 白 色 背 景 与 蓝 色 背 ”个 重要 步骤 。 本 文 以 4 种 颜色 背景 下 的 S 种 字符 图 像 作 为 视觉 
景 、 红 色 背 景 与 绿色 背景 、 红 色 背 景 与 蓝 色 背 景 、 绿 色 背 景 与 。 图 像 刺激 ， 利 用 神经 元 的 Spike 发 放 率 特征 ， 构 建 线 性 逆 滤波 
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蓝 色 背景 的 重建 结果 显著 性 水 平分 别 为: pw2=0.12、pwe2=0.97、 器 与 随机 森林 两 种 重建 模型 ， 对 白色 、 红 色 、 绿 色 、 蓝 色 背 景 
Dw2—5.79x105. pig2=0.13, pro2=1.46x10%, pao77.57x1075, JAP 的 字符 图 像 刺 激进 行 重建 ， 并 分 析 背 景 颜色 对 重建 结果 的 影 
v 可 以 看 出 , RF 重建 模型 对 不 同 颜色 背景 重建 结果 的 显著 性 结论 。 响 ， 结 果 表 明 : a) 两 种 图 像 重建 模型 均 能 利用 Spike 发 放 率 特 
”与 线性 道 滤波 器 重建 结果 显著 性 结论 保持 一 致 。 征 实现 字符 图 像 刺激 重建 ， 说 明 Spike 发 放 率 特征 能 够 用 于 表 
随机 森林 是 一 种 非 线性 建 模 工 具 0723， 而 线性 道 滤波 器 则 是 。” 征 字符 图 像 信 息 ; b ) 通过 对 以 上 两 种 模型 的 重建 结果 进行 的 方 

一 种 线性 建 模 方式 。 两 种 模型 对 字符 图 像 刺激 均 能 有 效 实现 重 。 差分 析 表 明 : 和 白色、 红色 和 绿色 背景 下 图 像 重 建 结果 之 间 无 : 


十， 并 且 不 同 背景 下 图 像 重 建 结果 的 显著 性 差异 存在 一 致 性 ， 性 差异 ， 但 白色 、 红 色 和 绿色 背景 下 图 像 重 建 结果 均 与 蓝 色 
这 不 仅 证 明 以 Spike 发 放 率 特征 可 以 用 于 重建 图 像 信息 ， 同 时 背景 图 像 重建 结果 有 显著 性 差异 ， 并 且 蓝 色 背 景 削弱 了 图 像 重 
也 可 以 说 明 对 不 同 背 景 刺激 图 像 重建 效果 的 差异 性 并 非 来 源 于 EE. 


算法 本 身 。 实验 中 字符 图 像 重建 的 数据 维度 较 高 ， 文 中 所 采用 的 线性 
Heo e 逆 滤波 器 与 随机 森林 两 种 算法 均 具 有 处 理 高 维度 数据 的 能 力 ， 
i2. me 并 且 能 对 字符 图 像 刺激 以 较 高 的 正确 率 实现 重建 ， 但 两 种 算法 
儿 .— 也 存在 着 不 足 之 处 。 首 先 ， 线 性 逆 滤 波 器 算法 的 噪声 鲁 棒 性 较 
qM MOM MONS EN X, 75 Spike 信号 存在 一 定量 噪声 时 往往 对 重建 结果 产生 影响 ; 
mi | 其 次 ， 随 机 森林 算法 在 处 理 大 数据 时 会 导致 时 间 复杂 度 明 显 升 
高 ， 从 而 使 运行 效率 降低 。 
M | 在 未 来 的 研究 工作 中 ， 一 方面 考虑 使 用 Spike 信号 与 
0 b Ma | Y LFP(local field potential) 信 号 的 联合 特征 来 提高 图 像 的 重建 正 
mit eae 确 率 [9， 另 一 方面 也 将 在 此 研究 的 基础 上 继续 对 自然 图 像 、 视 
(a) 线性 逆 滤 波 器 模型 下 各 字符 图 像 的 重建 正确 率 频 等 更 为 复杂 的 视觉 刺激 进行 重建 研究 ， 这 不 仅 能 进一步 为 探 
究 生 物 视觉 系统 的 图 像 信息 表征 机 制 提供 依据 ， 同 时 也 有 助 于 


推进 图 像 理解 技术 方面 的 发 展 09。 
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